运动传输是根据来自给定驾驶视频的运动来合成单个源图像的未来视频帧的任务。由于运动表示的复杂性和驾驶视频与源图像之间的未知关系,此任务是具有挑战性的。尽管有这种困难,但这个问题吸引了近年来研究的极大兴趣,逐渐改进。问题可能被认为是运动和外观的去耦,这通常通过从关键点移动中提取运动来解决。我们选择解决通用,无监督的设置,在那里我们需要将动画应用于任何任意对象,而没有任何用于输入结构的域特定模型。在这项工作中,我们从Keypoint Heatmap中提取结构,没有明确的运动表示。然后,从图像和视频中提取来自图像的结构以根据视频,由深发电机横断图像。
translated by 谷歌翻译